Kediaman ini asalnya dibentuk pada tiga binaan bangunan yang berasingan, setiap satu dihubungkan dengan laluan pejalan kaki yang pendek dan sempit. Pada tahun 1883, sebuah menara jam telah dibina dihadapan istana bagi memperingati Charles Brooke (Raja Putih Sarawak pertama) yang mendiami istana tersebut.

Bangunan Astana telah banyak melalui proses pengubahsuaian dan penambaikkan sejak pembinaannya, disamping menjaga kualiti bangunan yang mendapat status kediaman rasmi kepada Yang di-Pertua Negeri Sarawak.